Сбор proxy своими руками.

(Ответов: 33, Просмотров: 42558)
Страница 1 из 4 123 Последняя
  1. Banned
    • Регистрация: 08.09.2009
    • Сообщений: 1,478
    • Репутация: 80
    • Webmoney BL: ?
    Иногда бывает нужны прокси рабочие, например под парсинг. В этом посте я расскажу о методе сбора проксей, которой сам пользовался, пока не купил хрефер.

    1. Находим несколько рабочих и быстрых прокси где угодно. Уж 1 то можно найти не напрягаясь.

    2. Вводим адрес прокси как есть в поисковую систему и смотрим, чего он нам выдал. Перед вами множество ссылок на публичные списки прокси. Открываем их, смотрим, что это действительно лист и записываем куда ни будь адреса.

    3. Повторяем процедуру проверки листа для каждой ссылки, пока не станет попадатся откровенный мусор. У вас должно накопится штук 20 живых прокси листов.

    4. Далее настраиваем любой офлайновый браузер teleport pro на скачку по карте и выкачиваем всё содержимое этих листов в отдельную папочку.

    Далее прогой text pipe pro или любой другой, работающей с регулярными выражениями ищем всё по регулярному выражению

    Код:
    /^[1-2]?[0-5]?[0-5]\.[1-2]?[0-5]?[0-5]\.[1-2]?[0-5]?[0-5]\.[1-2]?[0-5]?[0-5]:([0-9*?])$/
    Вуаля! Мы собрали все доступные прокси, осталось их почекать на живучесть любой прогой для проверки proxy и пользоваться:)

    UPD: Пока писал пост, наткнулся на список прокси листов, тем кому лень искать листы прокси рекомендую этот: 800 прокси листов
    • 1
  2. Дипломник Аватар для CrazyStudentS_MiX
    • Регистрация: 03.09.2009
    • Сообщений: 195
    • Репутация: 13
    сбор прокси если у вас есть хрефер:

    inurl:/proxyc/engine.php


    переходим по ссылкам и меняем в адресной строке engine.php на list.txt

    копипастим список прокси-листов в свой list.txt, а затем чекаем прокси хрефером
    • 0
  3. Опытный
    • Регистрация: 04.09.2009
    • Сообщений: 288
    • Репутация: 11
    Спасибо за холявные прокси, а люди ранее в постах просили как их получить, а тут сразу и ответ.
    • 0
  4. Опытный Аватар для Crasher69
    • Регистрация: 08.09.2009
    • Сообщений: 437
    • Записей в дневнике: 5
    • Репутация: 175
    • Webmoney BL: ?
    ну хрефер есть и не у всех)
    А так - очень отлично, спасибо за инструкцию. Еще-бы среди этих были анонимных побольше))
    • 0
  5. Banned
    • Регистрация: 08.09.2009
    • Сообщений: 1,478
    • Репутация: 80
    • Webmoney BL: ?
    На анонимность чекает чекер анонимности. Вот такая скороговорка :)
    • 0
  6. Гуру
    • Регистрация: 08.09.2009
    • Сообщений: 1,981
    • Записей в дневнике: 4
    • Репутация: 193
    ну из 800 хорошо бы треть оказалась рабочей) спасибо конечно за список
    • 0
  7. Senior Member Аватар для de_n
    • Регистрация: 06.09.2009
    • Сообщений: 125
    • Репутация: 12
    Отдельное спасибо за регулярку. Никак не осилю их написание.
    Может кто посоветует литературу по Регулярным выражениям?
    • 0
  8. Banned
    • Регистрация: 02.09.2009
    • Сообщений: 1,065
    • Репутация: 19
    Покупные рулят. Но впринципе свои собраные тоже можно юзать, если немного постараться при их сборе.
    • 0
  9. Гуру Аватар для BABBLS
    • Регистрация: 04.09.2009
    • Сообщений: 756
    • Репутация: 33
    Цитата Сообщение от noxon.su Посмотреть сообщение
    Иногда бывает нужны прокси рабочие, например под парсинг. В этом посте я расскажу о методе сбора проксей, которой сам пользовался, пока не купил хрефер.

    1. Находим несколько рабочих и быстрых прокси где угодно. Уж 1 то можно найти не напрягаясь.

    2. Вводим адрес прокси как есть в поисковую систему и смотрим, чего он нам выдал. Перед вами множество ссылок на публичные списки прокси. Открываем их, смотрим, что это действительно лист и записываем куда ни будь адреса.

    3. Повторяем процедуру проверки листа для каждой ссылки, пока не станет попадатся откровенный мусор. У вас должно накопится штук 20 живых прокси листов.

    4. Далее настраиваем любой офлайновый браузер teleport pro на скачку по карте и выкачиваем всё содержимое этих листов в отдельную папочку.

    Далее прогой text pipe pro или любой другой, работающей с регулярными выражениями ищем всё по регулярному выражению

    Код:
    /^[1-2]?[0-5]?[0-5]\.[1-2]?[0-5]?[0-5]\.[1-2]?[0-5]?[0-5]\.[1-2]?[0-5]?[0-5]:([0-9*?])$/
    Вуаля! Мы собрали все доступные прокси, осталось их почекать на живучесть любой прогой для проверки proxy и пользоваться:)

    UPD: Пока писал пост, наткнулся на список прокси листов, тем кому лень искать листы прокси рекомендую этот: 800 прокси листов
    Тоже пользовался таким методом, как то давно, и давал хорошие результаты:)

    сбор прокси если у вас есть хрефер:

    inurl:/proxyc/engine.php


    переходим по ссылкам и меняем в адресной строке engine.php на list.txt

    копипастим список прокси-листов в свой list.txt, а затем чекаем прокси хрефером
    по поводу этого способа. уже многие поменяли имя текстового файла, и пхп чекера, если кто не поменял, то увидев этот пост поменяют.
    • 0
  10. Опытный
    • Регистрация: 04.09.2009
    • Сообщений: 288
    • Репутация: 11
    выглядит все сложно, а на деле не так уж.
    • 0
Страница 1 из 4 123 Последняя

Похожие темы

Темы Раздел Ответов Последний пост
Делаем парсеры контента своими руками
Контент 14 17.12.2013 01:26
proxy сервис
Софт, скрипты, сервисы 6 01.12.2012 14:41
php: Парсер своими руками. Теория
Дайджест блогосферы 0 25.12.2009 17:36
Тренинг-семинар "Продающий текст своими руками"
Семинары и конференции 0 31.10.2009 00:50

Интересные темы

парсер контента собственными руками

Что тебе может понадобится для того, чтобы сделать парсер контента собственными руками, читай здесь.

сбор прокси

Как быстро и эффективно организовать сбор прокси, как проверить на работоспособность, читайте далее.

делаем парсер

Что такое парсинг и для чего он нужен вебмастеру, делаем парсер своими собственными силами.

У кого попросить инвайт?

Вы можете попросить инвайт у любого модератора:

Информеры